UI-KOBE: Knowledge-Oriented Behavior Exploration for Lightweight Graph-Guided GUI Agents
知识导向行为探索:轻量图引导的移动GUI代理
🧭 轻量级GUI Agent行为探索
CUHK MMLab · Huawei Research · Shenzhen Loop Area Institute · CPII under InnoHK
通过自动构建应用知识图,为轻量GUI代理提供结构化行为指导,提升端侧任务可靠性与隐私性。
📌 工作参考价值(4 点)
- 将用户操作流建模为知识图,引导Agent决策,减少对LLM的依赖,提升稳定性和响应速度,适合电商场景中的自动化操作流程。
- 图自动构建方法可用于冷启动或快速适应新业务场景,例如新电商App的自动化测试或客户引导流程设计。
- 轻量模型+图引导的架构适合部署在资源受限的端侧设备,对隐私敏感的推荐交互(如端侧Agent)提供参考。
- 自环和邻居边切换策略可迁移到多Agent协作场景,将复杂任务分解为图谱上的状态转移,降低调度复杂度。